基于视觉—语音交互式室内层次地图构建与导航系统

【摘要】本文在搭载有Kinect视觉传感器和SICKLMS100激光传感器的Pioneer-3AT机器人硬件平台上,在开源操作系统ROS框架内,搭建了一个完整的基于骨架追踪和语音标注的交互式栅格-拓扑-语义层次地图构建和导航系统。整个系统包括交互模块,控制模块,制图模块和导航模块四个主要部分。交互模块中：本系统使用了基于Kinect骨架追踪和基于科大讯飞云服务的视觉-语音交互手段。机器人通过SkeletonTracking算法获取用户的骨架位置信息,通过手机端的语音识别APP记录对于人类来说有特殊意义的地点的语义名称。控制模块中：机器人将视觉交互模块获得的骨架位置信息按照一定的函数关系转化成机器人的角速度和线速度从而跟随用户移动。制图模块中：在跟随用户移动过程中机器人自下而上的建立了栅格-拓扑-语义三层地图。机器人通过Gmapping算法使用里程计和激光数据实时构建出周围环境栅格地图。将特殊地点语义名称结合栅格地图的坐标位置值定义为拓扑节点,使用增量算法构建出拓扑地图。最后抽取出每个拓扑节点的语义名称,建立语义地图。底层栅格地图用于机器人理解环境,上层语义地图用于人类理解环境,中间的拓扑层通过在语义名称和坐标值之间建立对应关系,成为上层地图和底层地图之间联系的桥梁。导航模块中：用户通过手机端APP向机器人发送目的地语音名称,机器人收到语音信号后,首先在语义层地图找到相应的语义节点,然后在拓扑层找到对应语义节点的坐标值,最后将栅格地图转化成耗散地图,使用AdaptiveParticleFilter算法完成全局定位,A*搜索算法完成路径规划,最终到达目的地。交互式制图因为加入了人类智力不仅可以提高机器人的制图效率,而且可以在地图中加入人类语义信息。栅格-拓扑-语义层次地图可以在人类认知环境方式-语义概念和机器人认知环境方式-传感器数据之间建立桥梁,有效减少人机之间的认知鸿沟。此外,整个系统在ROS框架内实现,严格按照功能不同对程序进行了模块化,使本系统具有良好的可扩展性和可移植性。并在不同的真实环境下做了大量的实验和测试。实验结果表明,交互式构建栅格-拓扑-语义层次地图能够有效地结合环境信息和人类语义,高效完成地图构建和导航任务。相信本系统可以应用在室内家居服务机器人,博物馆导览机器人,智能轮椅等之上,改善人类的日常生活。
【作者】赵程；
【导师】潘伟；
【作者基本信息】厦门大学，计算机技术，2014，硕士
【关键词】骨架追踪；语音标注；层次地图构建和导航；ROS；

【参考文献】
[1]韩亮.成都平安经营战略研究[D].四川大学,工商管理,2003,硕士.
[2]李正健.STS视角下的我国技术灾害应急机制研究[D].成都理工大学,科学技术与哲学,2013,硕士.
[3]王淑琼.洛阳牡丹文化节旅游纪念品的设计与开发研究[D].中南民族大学,设计艺术学,2013,硕士.
[4]高源.激光测风雷达信号处理技术研究[D].哈尔滨工业大学,物理电子学,2013,硕士.
[5]王沙沙.《大众日报》对公办教育资源违规占用现象调查系列报道[D].山东大学,新闻与传播学（专业学位）,2013,硕士.
[6]张玉婷.论《监护人卡斯滕》与《布登勃洛克一家》中的家庭没落[D].复旦大学,德语语言文学,2012,硕士.
[7]王青杵.山西永定河流域植被建设对土壤侵蚀的影响及生态需水研究[D].山西农业大学,土壤学,2013,博士.
[8]刘帅.本山传媒运营机制优势与局限分析[D].吉林大学,广播电视艺术学,2013,硕士.
[9]杨斌.从文体学角度对小说引语翻译的研究[D].中国人民解放军外国语学院,英语语言文学,2004,硕士.
[10]周洋.猪印迹基因的克隆及印迹方向和表达模式分析[D].东北农业大学,发育生物学,2013,硕士.
[11]胡宏亮,朱雪焱,袁哲东,俞雄,黄雨.抗丙肝药物faldaprevir的合成[J].中国新药杂志,2015,04:452-456.
[12]王微平.教育信息化环境下的语文课程与教学改革[D].华东师范大学,教育,2002,硕士.
[13]寿新宝.关于我国竞争秩序的法律思考[D].华东政法学院,经济法学,2003,硕士.
[14]柳维长.组合开关网络的可靠性[J].自动化学报,1965,01:27-32.
[15]蒙英男.新生代农民工社会认同动机与社会认同类型的关系[D].沈阳师范大学,应用心理学,2014,硕士.
[16]刘伟涛.人权视野下营业自由问题的法律思考[D].内蒙古大学,法律,2013,硕士.
[17]肖长全.基于甩挂技术的中韩陆海多式联运研究[D].曲阜师范大学,教育经济与管理,2013,硕士.
[18]马华芳,杨马英,胡巨达.控制系统性能诊断方法综述[J].控制工程,2013,S1:136-141+145.
[19]杨桥樱.亚砷酸钠诱导人永生化角质形成细胞株HaCaT恶性转化及肿瘤干细胞标志物的表达及意义[D].广西医科大学,营养与食品卫生学,2013,硕士.
[20]王树栋.复杂地应力区隧道软弱围岩大变形控制技术研究[D].北京交通大学,2010.
[21]董宏辉,要婷婷,李海舰,贾利民,刘承坤,秦勇.高速铁路基础设施检测传感器网络物理拓扑优化方法[J].中国铁道科学,2015,02:118-124.
[22]李琳骅.超额收益视角下的无形资产与企业价值相关性实证研究[D].浙江工商大学,会计学,2013,硕士.
[23]闫红岩.构建基因组分节段的猪瘟病毒石门株[D].山东师范大学,细胞生物学,2013,硕士.
[24]徐碚,张堃.基于质量功能配置的电信产品市场细分[J].现代电信科技,2004,05:38-41.
[25]赵大龙.无机固化膨胀充填材料特性实验研究[D].西安科技大学,安全技术及工程,2014,硕士.
[26]方桐清.建筑工程保险机制的研究[D].西安建筑科技大学,建筑与土木工程,2004,硕士.
[27]邓佳楠.ZnO/TiO_2异质纤维的制备及其传感特性的研究[D].吉林大学,集成电路工程,2013,硕士.
[28]邓文青.大明宫遗址周边地铁站设计导则研究[D].西安建筑科技大学,建筑与土木工程,2013,硕士.
[29]陈新萍.语用推理视角下高职英语阅读课的实验研究[D].沈阳师范大学,课程与教学论,2014,硕士.
[30]徐川龙.基于三维加速度传感器的人体行为识别[D].浙江工业大学,2013.
[31]白娟.基于.NET和SQL Server的教务管理系统[D].郑州大学,计算机技术,2013,硕士.
[32]刘粉林,刘媛,王银河,张嗣瀛.时滞不确定组合大系统的鲁棒分散镇定[J].控制与决策,2001,01:47-50.
[33]韩飞.延安市城市形态优化方法初探[D].长安大学,城市规划与设计,2014,硕士.
[34]朱小龙.门式起重机轻量化研究及局部载荷作用下腹板屈曲分析[D].西南交通大学,机械设计及理论,2012,硕士.
[35]孟令德.基于簇的片上网络设计及实现[D].西安电子科技大学,电子与通信工程,2011,硕士.
[36]马宪军.基层警务信息管理系统的设计与实现[D].吉林大学,软件工程,2012,硕士.
[37]董敏.我国上市银行收入结构转型问题研究[D].山西财经大学,金融学,2013,硕士.
[38]童恒庆,梅清.Web日志挖掘数据预处理研究[J].现代计算机(专业版),2004,03:6-9+13.
[39]龚梦南.英语新闻报道与新闻评论中元话语使用情况之对比分析[D].华中科技大学,英语语言文学,2013,硕士.
[40]陈浩林,张保庆,秦学彬,刘军,刘仁武,郭维婷,李德松.海上OBC地震勘探高精度潮汐校正方法[J].石油地球物理勘探,2014,S1:1-5.
[41]尹颖.基于PBM的某客车承载结构简化建模及优化设计研究[D].吉林大学,机械工程,2014,硕士.
[42]杨升华.高校成绩管理系统设计与实现[D].电子科技大学,软件工程（专业学位）,2012,硕士.
[43]穆培艳.螺旋磁化超晶格调制下拓扑绝缘体表面电子的隧穿输运[D].大连理工大学,2011.
[44]邓娇娇.中国金融消费者权益保护模式研究[D].北京交通大学,2013.
[45]李伟,李贺军,魏建锋,张守阳,傅杨茜,王沛.石墨化处理对不同高织构含量C/C复合材料微结构的影响[J].新型炭材料,2014,05:369-373.
[46]王尧.阻碍日朝邦交正常化的原因探析[D].吉林大学,国际政治,2013,硕士.
[47]陈卓敏.大规模伤亡事件过负荷医院护理质量评价指标体系研究[D].第二军医大学,护理学,2013,硕士.
[48]宋伟伟.兰州市地表水生态系统服务价值评估[D].兰州大学,区域经济学,2014,硕士.
[49]余雷鸣.中国银行业市场势力的拓扑结构研究[D].浙江工业大学,技术经济及管理,2012,硕士.
[50]韩冰.论证券投资信托基金受益人权利的法律保护[D].中国政法大学,经济法学,2004,硕士.